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(54) Title: OPTICAL IMAGING METHOD AND DEVICE 

(54) Bezeichnung: VERFAHREN UND VORRICHTUNG ZUR DURCHFOHRUNG VON OPTISCHEN AUFNAHMEN 
(57) Abstract 

Disclosed is an optical imaging 
method and device enabling display and 
3D measurement of tridimensional objects 
(I), whereby at least two individual images 
«re captured one after the other and the 
effective amount of radiation energy for the 
image conversion is controlled or regulated 
differently for these individual images. By 
employing adustable opdeal means (10-14) 
for the illumination of the object or in the 
optical path for the imaging of the objecr 
on the image convener (15) it is possible 
to acquire a larger amount of visual 
information on the object observed than 
thai which is available in an individual 
image due to the limitations imposed by 
the design of the convener used (15). The 
invention relates to processes and design 
forms of the device enabling recording units to be designed, using simply and generally commercial components, which are able to displav 
anc measure larger objects (I) despite a reduced heid of vision irnposed by the de S1 gn. This is esoeciallv useful for diagnosis in invasive 
applications in me bodies oi humans or animals. ' 
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Verfahren und Vorrichtung zur Durchfuhrung von optischen Aufnahmen 

Die Erfindung betrifft ein Verfahren zur Durchfuhrung von optischen Aufnahmen. bei 
dem mindestens zwei Einzelaufnahmen hacheinander erfolgen und fur die 
Einzelaufnahmen die fur die Bildwandlung wirksame Menge der Strahlenergie 
unterschiedlich gestellt wird. Femer betrifft die Erfindung eine Vorrichtung fur ein 
solches Verfahren. 



Zum Zweck der Darstellung. Dokumentation oder Vermessung bietet der Einsatz von 
Verfahren, die auf optischer Grundlage arbeiten.' eine Vielzahl von Vorteilen. Eine 
Vermessung kann schnell und beruhrungslos erfolgen. Zum Stand der Technik 
gehoren elektronische Bildwandler. beispielsweise CCD-Arrays. deren 
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Aufgabe der Erfindung isi es daher, das Verfahren una die Vornchtung zur 
Durchfiihrung von optischen Aufnahmen der eingangs beschriebenenAri zu schar'fen. 
die die Erfassung eines grofieren Umfangs von Bildinrormationen uber das 
betrachtete Objekt ermdglicht, als aufgrund der bauartbedingten Grenzen des 
mindestens einen verwendeten Bildwandlers in einem Einzelbild zur Venugung 
stehen. 

Die Aufgabe wird erfindungsgemaft bei dem Verfahren dadurch geldst, da/3 

a) ein Aufnahmevorgang unter Verwendung mindestens eines fiachigen 
elektronischen Bildwandlers durchgefuhrt wird, in dessen Veriauf mindestens 
zwei Einzeibilder gewonnen werden und 

b) fur die Einzelaufnahmen die fur die Bildwandlung wirksame Menge der 
Strahlenergie unterschiedlich gesteilt wird. 

Unter "Menge der Strahlenergie" ist im Sinne dieser Erfindung das Integral des 
Produkts aus Wirkungsdauer und Intensitat einer Strahiung zu verstehen. 

Unter einer Beeinflussung ,der "fur die Bildwandlung wirksamen Menge der 
Strahlenergie" ist im Sinne dieser Erfindung ausschiiefilich eine gezielte 
Beeinflussung der fur die Bildwandlung wirksamen Menge der Strahlenergie seitens 
der Einrichtungen der Aufnahmevorrichtung selbst zu verstehen. Daft zusatzlich das 
zu erfassende Objekt selbst diese fur die Bildwandlung wirksame Menge der 
Strahlenergie wesentlich - auch im Veriauf des Aufnahmevorgangs unterschiedlich - 
beeinfludt, ist selbstverstandlich. 

Die fur die Einzelaufnahmen wirksame Menge der Strahlenergie kann 
erfindungsgemafi vorteilhaft in unterschiedlicher Art und Weise verandert werden. 
indem 



a) mindestens eine Strahlquelle in ihrer Intensitat und/oder Wirkungsdauer fur die 
Aufnahme der Einzeibilder unterschiedlich gesteilt wird; 
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dieser Erfindung. dafi die oben genannten Mittel fur aufeinanceriolgende 
Aufnahmen unterschiedlich gestellt werden. um gezielt im- Veriaur des 
Aufnahmevorgangs den Gehali der Bildin formation en aufeinanden'olgender 
Einzelaufnahmen zu variieren. 

In einer besonders vorteilhaften Ausgestaltung der Erfindung wird mindestens eine 
Slrahlquelle fur die Einzelaufnahmen in seiner Intensitat unterschiedlich gestellt. 

Es ist enindungsgemafi vorteilhaft. zusatzlich oder alternativ zur stellbaren 
Strahlquelle eine stellbare Blende ggf. mit geeigneter Optik in den optischen 
Strahlengang einzubringen, die hinsichtlich Offnungszeit und/oder Brennweite fur die 
Einzelaufnahmen unterschiedlich gestellt werden kann. Diese Blende kann 
gleichermafien vorteilhaft im optischen Strahlengang zwischen einer Strahlquelle und 
dem Objekt oder zwischen dem Objekt und dem Bildwandler angeordnet sein. 

Alternativ kann erfindungsgemafi vorteilhaft anstelle der Blende beispielsweise ein 
mechanischer Shutter oder eine LCD-Einrichtung angeordnet werden. die fur die 
Einzelbilder unterschiedlich gestellt werden konnen. Die LCD-Einrichtung kann 
erfindungsgemafi vorteilhaft flachig durchlassig, teilweise durchlassig oder auch 
undurchlassig gestellt werden. 

Zum Stand-der Technik gehdren sogenannte elektronische Shutter-Einrichtungeri von 
CCD-Bildwandlern. mit deren Hilfe die Taktzeit fur das Shiften der Ladungen aus den 
fur die B.elichtung vorgesehenen Bereichen des CCD-Arrays in optisch abgedeckte 
Bereiche derart gewahlt werden kann. dafi die Integrationszeit des Bildwandlers und 
damit die Helligkeit des aufgenommen Bildes verandert werden kann. Entsprechend 
ist es erfindungsgemafi vorteilhaft. mittels geeigneter Ansteuerung dieser Einrichtung. 
die fiir die Bildwandlung w,rksame Menge der Strahlenergie fur die Einzelbilder 
unterschiedlich zu stellen. 

Eine besonders vorteilhafte Ausgestaltung der Erfindung sieht vor. dafi die 
gewonnenen Einzelbildinformationen digitalisiert werden und die digitalisierten Daten 
einer Einrichtung fur die elektronische Datenverarbeitung zur Verfiigung aestellt 
werden. 
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Beispieisweise ist es enindungsgemafi vorteilhaft mogiich, die dicitalisierten Oa-en 
zweier aufeinanclerfolgender Bilder mittels entsprechender Software dergestalt zu 
kombinieren. dafj aus dem oben beschriebenen niedrig belichteten Einzeibild 
diejenigen Bildbereiche mit hohern Reflexionsgrad und aus dem oben beschriebenen 
stark belichteten Einzelbild die Bildbereiche mit niedrigem Reflexionsgrad ausgewahlt 
und in eine gemeinsame Helligkeitsskaia transformiert werden. Als Ergebnis erhalt 
man ein Bild, das alle Bildbereiche mit ausreichendem Kontrast darstellt. 

Erfindungsgemaft vorteilhaft ist es, eine feinere Abstufung der Beleuchtungsstarke 
vorzusehen. Dabei kdnnen weitere Helligkeitsstufen eingesetzt werden. Das 
kombinierte Bild wird dann aus den Bildinformationen mehrerer Einzelaufnahmen 
zusammengesetzt. 

Es ist erfindungsgemaft nicht erforderlich, ausschiieGlich direkt aufeinanderfolgende 
Bilder auszuwerten oder nur Einzeibilder zu kombinieren, die mit unterschiedlicher 
Strahlenergie aufgenommen wurden. 

ErfindungsgemaG besonders vorteilhaft ist eine automatische Regelung der 
genannten optischen Mittei zur Beeinflussung der fur die Bildwandiung wirksamen 
Menge der Strahlenergie, abhangig von der Auswertung der tatsachlichen 
Reflexionsverhaltnisse in den vorher aufgenommenen Bildern der jeweiligen 
Oberflache. Durch diesen Regelkreis wird erfindungsgemaG sichergestellt, dad fur alle 
Bereiche der zu erfassenden Oberflache die Beleuchtungsstarke jeweils optirniert 
wird. 

Ebenfalls erfindungsgemaR vorteilhaft ist die Ven/vendung mehrerer Strahlquellen. 
Beispieisweise kann dann mittels einer Strahlqueile und geeigneter optischer Mittei 
ein Muster auf die zu vermessende Oberflache projiziert werden. Wenn der 
Projektionswinkel unterschiedlich vom Aufnahmewinkel ist, kdnnen in bekannter 
Weise aus der Abbildung des Musters auf dem Bildwandler 3D-lnformationen 
errechnet werden. Die andere Strahlqueile leuchtet dabei alternierend die -zu 
vermessende Oberflache vollstandig aus. Dann konnen aus den Einzelbildern sowohl 
3D-lnformationen als auch Ansichten der erfaflten Obertlache gewonnen werden. Der 
erfindungsgemafie Vorteil liegt darin, daft sich eine entsprechende Vomchtung ohne 
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Eine weitere voneilhafte Ausgestaltung der Erfindung verwendet mindesiens eine 
Strahlquelle mit extrem kurzer Leuchtdauer, vorzugsweise im Bereich von 0,001 bis 
0,01 s. und grofier Helligkeit. Die fur die Belichtung des zu erfassenden Obiekis 
abgestrahlte Energtemenge kann in diesem Fall durch die Strahldauer variiert werden. 
Zudem wird der EinfluG von Verwackelungseffekten bei unruhiger Handhabung der 
Aufnahmevorrichtung minimiert Solche Strahlquellen sind beispielsweise bekannt als 
Stroboskoplicht, Blitzlampe, Blitzrohr oder Fiash-LED und werden beispielsweise 
(ebenfalls extern getaktet) zum Einstellen des Zundzeitpunktes bei Ottomotoren mit 
mechanischem Unterbrecherkontakt verwendet. 

Beim Aufnahmevorgang kdnnen "abgeschattete" Bereiche entstehen, wenn die zu 
erfassende Oberflache bezuglich des Strahlengangs des projizierten Musters 
Hinterschneidungen aufweist. Hinterschneidungen in diesem Sinne heirLen 
Ausbildungen der dreidimensionalen Kontur, die bezuglich der Betrachtungs- oder der 
Projektionsrichtung durch Teile des Objekts selbst verdeckt sind und insofem fur eine 
Betrachtung oder Projektion nicht zuganglich sind. Fur solche Falle ist es 
erfindungsgemad besonders vorteilhaft, mindestens eine weitere Strahlquelle 
vorzusehen, die alternierend zu den verwendeten anderen Strahlquellen mit Hilfe 
geeigneter optischer Mittel ein Muster aus einer weiteren Raumrichtung auf die 
Oberflache projiziert Damit kdnnen Informationen uber diejenigen vorher 
abgeschatteten Bereiche der Oberflache gewonnen werden, die unter dem neuen 
Projektionswinkel optisch zuganglich sind. Mittels entsprechender Software kdnnen 
die unter den unterschiedlichen Projektionswinkeln erhaltenen 3D-Informationen der 
zu erfassenden Oberflache dergestalt kombiniert werden, dafi sich die 3D- 
Informationen gegenseitig erganzen. 

Samtliche in dieser Erfindung beschriebenen Ausgestaltungen des Verfahrens und 
der Vorrichtung kdnnen erfindungsgemaR besonders vorteilhaft in vielfaltiger Art und 
Weise miteinander kombiniert werden. 

Beim Vermessen von schlecht zuganglichen Stellen ist die Baugrdfle desjenigen Teils 
der Vorrichtung, der sich im schlecht zuganglichen Bereich befindet, begrenzt. Ein 
Beispiel hierfur sind Aufnahmen in der Mundhohle. Es ist aus diesem Grunde nicht 
ohne weiteres moglich. eine Aufnahme beispielsweise eines kompletten Kiefers 
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anzureragen. Bewegc nan nun die erfindungsgemaGe Aurnahmevorrichiunc relativ 
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Darstellung der Erdoberflache geben hier ein anschauliches Beispiel. 
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zu vermessencien Oberflache liegt bei etwa 10mm x 10mm, so dafi sich selbst bei 
einer hoch angesetzten Bewegungsgeschwindigkeit einer handgefuhnsn Vorrichtung 
von ca. 30mm/s ein Oberdeckungsgrad von mehr als S0% ergibt. Auch wer.n davon 
ausgegangen wird, dafi von den weiter oben beschriebenen Mdgiichkeiten der 
aiternierenden Belichtung und Auswertung Gebrauch gemacht und beispieisweise nur 
jedes vierte Bild tatsachlich fur eine dreidimensionaie Berechnung herangezogen 
wird, resultiert daraus immer noch ein Oberdeckungsgrad von uber 75%. 

Bei einer solchen vorteilhaften Ausgestaltung der Erfindung wird durch. Bewegen der 
Vorrichtung entlang der Zahnreihen mit jedem ausgewerteten Bild eine neue 
Information uber die dreidimensionaie Gestalt der zu vermessenden Oberflache an 
die bereits vorhandene angefugL Zudem kann durch numerische Kombination der auf 
die Einzelbilder bezogenen 3D-Daten hinsichtlich des sich jeweils uberdeckenden 
Bereichs die resultierende Information optimiert werden. Sie wird dabei durch 
Anwendung statistischer Verfahren genauer oder durch eine Vergrofterung der 
Anzahl der enthaltenen Stutzpunkte dichter. Die Quantitat der solcherant zu 
gewinnenden Informationen ist nicht durch das Verfahren oder die Vorrichtung selbst, 
sondern lediglich durch die Grofie des zur Verfugung stehenden Speichers der 
Datenverarbeitungseinheit begrenzt. 

Die Verwendung der oben beschriebenen Strahlquellen fur kurze Strahlimpulse ist im 
vorstehend beschriebenen Zusammmenhang erfindungsgemafl besonders vorteilhaft 
einzusetzep, urn die Verwackelungseffekte einer beispieisweise von Hand gefuhrten 
Aufnahmevorrichtung zu minimieren. 

Die erfindungsgemali vorteilhafte Verwendung mindestens einer Strahlquelle, die 
mittels geeigneter optischer Mittel ein Muster unter einem ausreichenden 
Triangulalionswinke! zur Aufnahmerichtung auf die zu erfassende Oberflache 
projiziert und mindestens einer weiteren Strahlquelle, die das Objekt beispieisweise 
alternierend farbgetreu beleuchtet, sowie die anschlieliende Kombination der den 
Einzelbildern zugehdrigen 3D-lnformationen mit den den Einzelbildern zugeordneten 
Farbinformationen erlaubt eine auflerst realitatsnahe Einfarbung einer resultierenden 
3D-Gitternetzdarstellung. 
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Die Vorrichtung zur DurchfQhrung von optischen Airfnahmen d -r ^inoargs 
beschnebenen Art lost die Aufgabe gemafi der Erfindung durch die Merkmals. dafi 

B) mindestens ein flachiger elektronischer Bildwandler unter Verwendung -ine^ zur 
Aufnahme von Bildern geeigneten Optik verwendet wird. der sich fur die 
Aufnahme von mindestens zwei aufeinanderfolgenden Bildern eigne, und 



b) 



rn.ndes.ens ein steHbares optisches Mitte, vorgesehen wird. das s,ch fur die 
Aufnahme der Einzelbilder hins.chtlich der fur die Bildwand.ung wirksam 
e-ngebrachten Menge der Strahlenergie unterschiedlich stellen lafit. 

Eine erf.ndungsgemars besonders vortei.hafte Ausbi.dung der Vorrichtung sieht 
E-nnchtungen vor, die die Digitaiisierung der Ausgangssigna.e des mindestens einen 
B.fdwand.ers bewirken und diese Daten einer Datenverarbeitungsanlage zur 

Verfugung stellt y 

Ein, enlndungsgemeS besonders .oneflhafte AusbMung der Vorrichtung sieh, 
annd,,ungen vor. d,e die Oaten von minders m i Einzeibiidern speichem 

Eine emnd U „gs g e ma0 besonders , ort ei,h af ,e Ausbiidung der Vorr ^ 

T T"Z V °'' * Da,e " V °" mWeS ' enS ™ B ™<™«" «•**«« und in 
der Uge ,sl,.d,ese miuels geeigneler Algorilhmen zu kombinieren. 

Eine enlndungsgema* besonders vortetafte Ausbitdung der Vornchtung sieh, 
opfsche Mate, im S„ a h,eng a „ g 2wischen d er mindestens einen S,rah, q ue„e u d d m 
zu erfassenden Obiek, vor. die die Projektion eines Musters ertauben. 

We^e- Vorteiie. Merkm a ,e und An„endungsmbg,ichkei,en der vodiegenden 
Erf, dung ergeben s,ch au s der foigenden Bescbreibung bevorzug,er 
Ausfuhrungsbe.spieie in Verbindung mi, der anliegenden Zeichnung 
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Durcniunrung von „p Kchen Au(nanme „ na£h ^ ^ 

^Le V v SelbS ' VerS,S " dltte Vdnw-^*-* nur scnemaiisc 
, ' Ve,ein ' aC,,u "3 der Beschreibung mrrde zudem darauf verzicMe, 

gezeigien A us oZ , ' GrUnd ° este » « * «W» "nd in der hier 

L3:i; a :r:;;: he r: "rr* das sich bei «™ — 

e vorgesehene geometnsche Anordnung dieser Teile zueinand^r 

e h : e «*• sind der TrSger (8, und die nTdZTT 

verbundenen optischen Mittel ow.^- J esem starr 

ausgebi,de,. da 0 s ie sic r ei ' ' " 7 AUS '° h ™ dS <°™ ** 
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«nne„ d/s me! ^ZZTJT,'^ ^ " ™ 

Tracer mi. ■ ^ eb, sses handeln. In engem Abstand erstreckt sich der 

^^z^rr kann sich ,eicw — -« - » 

M U nd h : te lerg ::::: trrr mii seinen a ^ - 

den MitKln (2 bis ,51 h ,™ We " 8r ' eiCW " 0rS,e " bar - da0 »«■ 

wird und de e 1 ;: o h r: TBi ' Ad '" a "™~° -n Hand ge n a„en 

Tea des Cebissest Pa " ' Un9 ; ,n9n ' n,ra0ra ' en «" **" 

Paliemen. ,n F,g. 1 geze ig, a | s Objekt (1). ausfiihn. 

5 JXlTZ L ° P " SChem G ' aS G °« e BK 7 "* *«" von 

dieser aJ oZg s r;' 18 ;*: """" ^ * 

TCaireHexion in L , 1. ^^""^"a- Ausnutzung der 

«■ F,. , ge 2 e,g, .„ Spiege, ,3 una 4,. Der zum Ob/eK, („ „ e isende 
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Teil des Glasprismas. in Fig. 1 gezeigt als Trager (8), ist unter45° abgeschragt. Diese 
Fiache ist ebenfalls geschliffen, poliert und zudem verspiegelt und client als ebener 
Spiegel (2) zur Umlenkung der Strahlen in Richtung des Obiekts (1). 

Aus Platzgriinden kann es vorteilhaft sein, auf der vom Objekt (1) abweisenden Seite 
des Tragers (8) ebenfalls Umlenkeinheiten anzuordnen, damit die Mittel (10 bis 15) 
nicht in einer Ebene angeordnet werden rnussen. 

Spiegel sind im Sinne dieser Erfindung optische Umlenkeinrichtungen unabhangig 
davon, ob die relevanten Flachen verspiegelt sind oder die Fahigkeit zur Umlenkung 
optischer Strahlen unter Ausnutzung der Totalrefiexion erfolgt. 

Der als Glasprisma ausgefuhrte Trager (8) kann erfindungsgemaB vorteilhaft beheizt 
werden, damit er bei invasiv durchgefuhrten Aufnahmen nicht beschfagt. Alternativ 
kann ein Luftstrom derart gefuhrt werden, daB der intraoral eingesetzte und fur die 
Aufnahme relevante Teil des Glaskorpers trocken gehalten wind. 

In einer anderen vorteilhaften Ausgestaltung der Vorichtung wird der Trager (8) derart 
ausgebildet, daB er sich fur endoskopische Untersuchungen eignet. Zudem ist es, 
erfindungsgemaB vorteilhaft, moglich weitere optische Mittel, beispielsweise Linsen, 
zusatzlich zum bzw. anstelle des Spiegels (2) auf dem Trager (8) anzuordnen. 

Die Strahlquellen {13 und 14). jeweils versehen mit den optischen Mitteln (10 und 11), 
dienen zur Beleuchtung des Objekts (1). Die Strahlen werden uber die ebenen 
Spiegel (2 bis 4) umgelenkt. Bei der hier gezeigten Ausfuhrungsform bestehen die 
optischen Mittel (10) aus einem Kondensor, einer Maske und einem Objektiv. 
Vermittels der Mittel (13, 10, 4, 2) wird flachig ein Linienmuster auf das Objekt (1) 
projiziert. Als optisches Mittel (11) findet ein Kondensor Verwendung. Vermittels der 
Mittel (14, 11 und 2) laBt sich das Objekt flachig beleuchten. Ais Strahlquelle (13 und 
14) kommen Blitzlampen zum Einsatz. Die Strahlquellen (13 und 14) sind vermittels 
elektrischer Verbindungen (20) mit einer Ansteuereinheit (19) verbunden. 

Die vom Objekt (1) reflektierten Strahlen werden uber die Spiegel (2 und 3) geienkt 
und vermittels der optischen Mittel (12) auf dem Bildwandler (15) abgebildet. Bei der 
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Betatigungselement. und fuhrt im Verlauf des Aufnahmevorgangs den 
Vorrichtungsteil. bestehend aus den Mitteln (2 bis 15) von Hand derart. dafi nach und 
nach alle relevanten' Obenlachenbereiche des Objekls (1) sowohl auf dem 
Bildwandler (15) abgebildet als auch gleichermaden von der Projektion des 
Linienmusters erfafit werden. Man beendet den Aufnahmevorgang durch eine weitere 
Betatigung des vcrstehend genannten Betatigungselements. 

In der Folge der aufgenommenen Einzelbildin forma tionen befinden sich jetzt 
abwechselnd Abbilder des aufgrund der Oberflachengestalt des Objekts (1) 
verzeichneten Linienmusters und Abbilder des flachig beleuchteten Objekts (1). Aus 
der Verzeichnung des Linienmusters lassen sich bei Kenntnis des optischen 
Strahlengangs und unter Berucksichtigung der geometrischen Ausbildung des 
projizierten Linienmusters fur die entsprechenden Einzelaufnahmen fur eine Vielzahl 
von Stutzpunkten 3D-Koordinaten errechnen. Aus der Folge der den Einzelbildem 
zugeordneten Bildinformationen und 3D-Koordinaten lassen sich im weiteren sowohl 
die ebenen Bildinformationen als auch die 3D-Koordinaten in der oben beschriebenen 
Art und Weise kombinieren. so dad im Ergebnis trotz des Sichtfelds der 
Aufnahmeeinheit in einer Groflenordnung von 15 mm x 15 mm sowohl die 3D- 
Koordinaten als auch ein einheitliches Farbbild des gesamten Zahnbogens vorliegen. 
Hierbei sind Liicken aufgrund von Hinterschneidungen. storenden optischen 
Reflexionen oder dunklen Bildbereichen ohne nennenswerten Kontrast nicht mehr 
vorhanden'. Durch eine online-Berechnung und -Anzeige der jeweiiigen 
Zwischenergebnisse kann der Bediener zudem die Fuhrung der Aufnahmevorrichtung 
von Hand oplimieren. 

Die fur die 3D-Berechnung erforderliche Kenntnis des optischen Strahlengangs und 
der geometrischen Ausbildung des projizierten Linienmusters erhalt man 
erfindungsgema* vorteilhaf! dadurch. dafi man nacheinander in unterschiedlichem 
Abstand parallel zu der zum Objekt (1) weisenden Fiache des Tragers (8) ein ebenes 
■n seiner Detailausbildung in der Fig. 1 nicht gezeigtes Objekt (1) positioniert. das 
quer zum proj.zierten Linienmuster ebenfalls ein Linienmuster aufweist. Werden nun 
zwei Bildaufnahmen angefertigt und ist sowohl das Referenz-Objekt (1) eben und das 
L.n,enmuster in seiner geometrischen Ausbildung als auch der Abstand zwischen 
Trager und Referenz-Objekt (8) fur beide Aufnahmen bekannt. kann man fur ei 
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lassen und insofern insgesamt geringere Anforderungen an die 
Fertigungstoleranzen der eingesetzten Mittel gesteflt werden mussen. 
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Bezugszeichenliste 

1 Objekt 

2 - 3 - 4 Spiegel 

5 ' 6 - 7 optische Achsen 

Trager (hier ausgefuhrt als Korper aus optischem Glas) 
Grundgestell 

optische Mittel (Linsensystem, Blende etc.) 
Strahlquelle (hier ausgefuhrt als Blitzlampe) 
elektronischer Bildwandler (CCD-Array) 

Einrichtung zur Oigita.isierung analoger Signa.e (Frame-Grabber) 
Datenverarbeitungseinheit (PC) 
Ansteuereinheit fur den Bildwandler 
Ansteuereinheit fur die Strahlquellen 
elektrische Verbindungen 



8 
9 

10. 11. 12 

13. 14 

15 

16 
17 
18 
19 
20 
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Patentanspriiche 

1. Verfahren zur Durchfiihrung von optischen Aufnahmen zum Zweck der 
Darstellung. Dokumentation oder Vermessung von Objekten (1) unter 
Verwendung mindestens eines elektronischen Bildwandlers (15) mil flachigem 
Sichtfeld. mindestens eines optischen Mittels (12) fur die Abbildung des 
Objektes auf dem Bildwandler (15) und mindestens einer Strahlquelle (13, 14) 
fur die Bestrahlung bzw. Durchstrahlung des Objekts (1), dadurch 
gekennzeichnet, dafi 

a) mindestens zwei Einzelaufnahmen nacheinander erfolgen und 

b) die wirksame Menge der eingebrachten Strahlenergie fur die 
optoelektronische Wandlung der Bilder fur die Aufnahme der Einzelbilder 
unterschiedlich gestellt wird. 

Verfahren nach Anspruch 1, dadurch gekennzeichnet, dafi die Intensity der 
eingebrachten Strahlenergie fur die optoelektronische Wandlung der Bilder fur 
die Aufnahme der Einzelbilder unterschiedlich gestellt wird. 

Verfahren nach Anspruch 1 oder 2. dadurch gekennzeichnet, dad die 
Wirkungsdauer der eingebrachten Strahlenergie fur die optoelektronische 
Wandlung der Bilder fur die Aufnahme der Einzelbilder unterschiedlich gestellt 
wird. 



Verfahren nach einem der Ansprtiche 1 bis 3. dadurch gekennzeichnet. dafi 
mindestens eine Strahlquelle (13. 14) beziiglich der von ihr fur die Aufnahme 
eines Einzelbildes abgegebenen Menge an Strahlenergie irh Verlauf der 
Aufnahme der Einzelbilder unterschiedlich gestellt wird. 

Verfahren nach einem der Ansprtiche 1 bis 4. dadurch gekennzeichnet dafi 
opt.sche Mittel (10, 11) fur die Beeinflussung der fur die Aufnahme eines 
E.nzelbiides wirksamen Menge an Strahlenergie in mindestens einem 
Strahlengang (6, 7) zwischen der mindestens einen Strahlquelle (13. 14) und 
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dem 2U erfassenden Objekt (1, im Verlauf der Aufnahme der Einz-lbilder 
unterschiedlich gestellt werden. 

5. Verfahren nach einem der Anspruche 1 bis 5. dadurch gekennzeichnet. daft 
optech. Mittel (1 2) fur die eeeinflussung der fur die Aufnahme eines 
E.nzeb,ldes wirksamen Menge an Strahlenergie in mindestens einem 
Strahlengang (5) zwischen dem zu erfassenden Ob/ekt (1) und dem mindestens 
e,nen B.idwandier (1 5) im Verlauf der Aufnahme der Einze.bi.der unterschiedlich 
gestellt werden. 

Verfahren nach e,nem der A „ S pruche , bis 6 dadurc( , g . k .„ ra daS 

dTT - ™«es,ens einen eleUronischen 

M""*" (,5, mi, Hiife geeignefcrMiUe, „a, derar, anges.eue,, werden. da* 

1 r 7 ein9ebrachte " S^lenergie fur die op.oeleMronische 

Wa d ung der Bilder im Veri au, der Aufnahme der Einzeibiider unferschiediich 

gestellt wird. 

Verfahren nach einem der Anspruche , bis 7. dadurch gekennzeichnet daE 
d.e Ausgangssignaie des mindestens einen B«d„andlers (15) in einer 
ensprechenden Einhe, ,16, d^.isie* werden und die digi.aiisier.en 
Ausgan g ss,gna,e einer Datenverarbetagsaniage ,17, zur VerfOgung ges.eli. 

v :Tz::z:i:;:° a dadurch - ~- ^ 

„ &"*elb.ldem ,„ einer Dalenverarbeilungsanlage (17) 

Sespe.cherf. dar,es« u„d,oder mi^is geeigne.er AigohJen JrnJJ 

T^ Ch T: m A " SP * hs ' te »■ ^ennzeichne,. da* 

ZJL ° Pl0elek ' r0niSChe Biider wir k same Menge an 

u~r h SynCh, ° n B *«*-"^uenz des Biidwandiers ,15, 
unterschiedlich gestellt wird. 
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10 



15 



20 



25 



30 



11. Verfahren nach einem der Anspruche 1 bis 10, dadurch gekennzeichnet. dafi 
die fur die optoeiektronische Wandlung der Bilder wirksame Menge an 
Strahlenergie in einer Steuerstrecke unterschiediich gestellt wird. 

12. Verfahren nach einem der Anspruche 1 bis 11. dadurch gekennzeichnet, dafi 
die fur die optoeiektronische Wandlung der Bilder wirksame Menge an 
Strahlenergie in einem Regelkreis unterschiediich gestellt wird. 

13. Verfahren nach einem der Anspruche 1 bis 12, dadurch gekennzeichnet. dafi 
optische Mittel (10) in mindestens einem Strahlengang zwischen der mindestens 
einen Strahlquelle (13. 14) und dem zu erfassenden Objekt (1) vorgesehen 
werden. die die Projektion mindestens eines Musters erlauben. 



14. 



Verfahren nach einem der Anspruche 1 bis 13. dadurch gekennzeichnet, dafi 
in der Datenverarbeitungseinheit (17) Einrichtungen und/oder Algorithmen zur 
Bildung einer 3D-lnformation verwendet werden. 

15. Verwendung der Verfahren nach einem der Anspruche 1 bis 14 fur die 
medizinische Diagnostik oder Therapie. 

16. Vorrichtung fur ein Verfahren nach einem der Anspruche 1 bis 14. dadurch 
gekennzeichnet. dafi mindestens ein Bildwandler (15) als CCD-Array 
ausgebildet ist. 

17. Vorrichtung fur ein Verfahren nach einem der Anspruche 1 bis 14, dadurch 
gekennzeichnet, dafi mindestens eine Strahlquelle (13, 14) als Blitzstrahlkorper 
ausgebildet ist. 

18. Vorrichtung fur ein Verfahren nach einem der Anspruche 1 bis 14, dadurch 
gekennzeichnet. dafi mindestens ein Grundgestell (9) Oder ein Trager (8) 
mindestens zwei der Mittel (2 bis 4 und 1 0 bis 1 5) starr verbindet. 
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19. Vorrichtung nach Anspruch 13. dadurch gekennzeichnet. dafi an dem Trager 
(3) mindestens ein Linsensystem (12) zur optischen Abbildung. des Objekts (1) 
auf dem Bildwandler (15) befestigt ist. 

20. Vorrichtung nach Anspruch 18. dadurch gekennzeichnet. daft an dem Trager 
(8) mindestens eine optische Umlenkeinrichtung (2. 3, 4) befestigt ist. 

2 1 . Vorrichtung nach einem der Anspruche 1 8 bis 20, dadurch gekennzeichnet, dad 
der Trager (8) mit seinen Aufbauten gegenuber den anderen Mitteln (9 bis 20) 
losbar und im ubrigen derart ausgebildet ist. daG er sich fur eine separate 
Sterilisation bzw. Desinfektion eignet. 

22. Verwendung der Vorrichtungen nach einem der Anspruche 16 bis 21 fur 
invasive medizinische Zwecke. 

23. Verwendung der Vorrichtungen nach einem der Anspriiche ^16 bis 21 zur 
beriihrungslosen Vermessung von wenigstens einem Zahn eines Gebisses des 
menschlichen und tierischen Kdrpers fur zahnmedizinische Zwecke. 

24. Verwendung der Vorrichtungen nach einem der Anspruche 16 bis 21 zur 
beruhrungslosen Vermessung des Zahnbogens eines Gebisses des 
menschlichen und tierischen Kdrpers fur kieferorthopadische Zwecke. 



Atty Doc. 59-99 Express Mail EI533780603 

1 

Method and device for carrying out optical pick up 

The invention relates to a method for carrying out optical pick up, in which at least 
two single pick ups follow one another consecutively and the amount of beam 
5 energy effective for the image conversion is set differently for the single pick ups. 
The invention further relates to a device for such a method. 

For the purposes of representation, documentation or surveying, the range of 
methods which work on optical principles, offer a large number of advantages. A 
10 survey can be done rapidly and without contact. Electronic image conveners, for 
example CCD arrays are known from the prior art, the output signals of which can 
be stored or evaluated directly after being digitised. 

Methods and devices for representing and for optical three-dimensional surveying 
15 of spatial surfaces are known. They are based on triangulation methods wherein 
point, line or any other patterns are projected at a specific angle onto the surface 
viewed, and the projected patterns are picked up from another viewing angle with 
an optical system and an image converter. The known geometry between the 
direction of projection and pick up direction allows the three-dimensional calculation 
20 of interpolation points on the surface. 

In the field of dentistry, for example, under the commercial name of CEREC, a 
system for manufacturing ceramic inlays is known, in which an optical 3D 
measuring device is used in order to survey a cavity in a tooth. 

25 

For orthodontic applications, an intra-oral stereo camera is described in German 
patent application P 42 18 219. This is used as a pan of a medical device, sold 
under the commercial name of "bending an system". The spatial data which are 
obtained with the aid of this camera from stereoscopic panial pick ups of the set of 
30 teeth are subsequently combined with one another and assembled to form overall 
spatial data about the set of teeth. 
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When optical methods are used for surveying and documentation purposes, problems 
do arise, however, when the surface to be determined has unfavourable reflection 
properties. When producing pick ups of teeth, for example, there is sometimes the 
task of determining both dark, man amalgam fillings and also strongly reflecting 
5 gold fillings to the same extent with a sufficient data content. In addition, the 
dynamic range of inexpensive CCD arrays is limited. 

The object of the invention is therefore to provide the method and the device for 
carrying out optical pick up of the type described in the introduction, which make 
10 possible the determination of a larger amount of image data about the object being 
viewed, than is available in a single image because of the limits due to the type of 
construction of the at least one image convener used. 

The object is attained according to the invention, with respect to the method, in that 

15 

a) a pick up procedure is carried out using at least one areal electronic 

image converter, in the course of which at least two single images are 
obtained, and 

20 b) the amount of beam energy effective for image conversion is set 

differently for the single pick ups. 

The "amount of beam energy" is understood, within the meaning of this invention, 
as meaning the integral of the product of the effective duration and intensity of 
25 radiation. 

Influencing the "amount of beam energy effective for image conversion" is 
understood, within the meaning of this invention, exclusively as meaning intentional 
influencing of the amount of beam energy effective for image conversion on the pan 
30 of the means of the pick up device itself. The fact that in addition the object to be 
determined itself substantially - and in the course of the pick up procedure, 
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differently - influences this amount of beam energy effective for image conversion 
is obvious. 

The amount of beam energy effective for the single pick ups can advantageously 
5 according to the invention be changed in different manners, in that 

a) at least one beam source is set differently with respect to its intensity 

and/or effective duration for the pick up of the single images; 

10 b) optical means are set in at least one beam path between a beam source 

and the object to be determined such that the intensity and/or the 
effective duration of the beam energy for illuminating and/or 
transilluminating the object is changed for the pick up of single images; 

1 5 c) optical means are set in at least one beam path between the object and 

the image convener such that the intensity and/ or the effective duration 
of the beam energy reflected or not absorbed by the object is changed for 
the pick up of single images; 
d) so-called shutter means of the image convener are controlled such that 

20 the effective time duration of the optoelectronic conversion of the beam 

energy used for image conversion in the image conveners is set 
differently for the single pick ups. 

A beam source, within the meaning of this invention, is any direct generator of 
25 beam energy. These are, inter alia, means for generating x-rays, visible, infra-red 
and ultra-violet light. 

Optical means in the beam path between the beam source and object, or between the 
object and image convener which allow the intensity and/or the effective duration 
30 of the beam energy for illuminating/transilluminating the object or for irradiating the 
image convener for picking up the single image to be set differently are, within the 
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meaning of this invention, optical means which change the intensity of the beam 
energy - except for fringe effects - regularly for the whole area, that is to say, for 
example aperture means and mechanical and LCD shutters. Optical means which 
project patterns onto the surface of the object in a changeable manner do not fall 
5 within this definition. 

Pick up units are known in which aperture means or shutter means are designed to 
be adjustable in image conveners. It is known from the prior an to control these 
means in automatic control loops for controlling the lighting in the manner such that 
10 the lighting of the single pick ups is optimised. The term "set differently for the 
single pick ups" means, within the meaning of this invention, that the means 
described hereinabove for consecutive pick ups are set differently in order to 
intentionally vary the content of the image data of consecutive single images during 
the course of the pick up procedure. 

15 

In a panicularly advantageous configuration of the invention, at least one beam 
source is set differently with respect to its intensity for the single pick ups. 

It is advantageous according to the invention, in addition or alternatively to the 
20 adjustable beam source, to bring an adjustable aperture means, optionally with a 
suitable optical system, into the optical beam path, which can be set differently with 
respect to the opening time and/or focal length for the single pick ups. This 
aperture means can, to an equal measure, advantageously be arranged in the optical 
beam path between a beam source and the object, or between the object and the 
25 image convener. 

Alternatively, according to the invention, instead of the aperture means, for 
example, a mechanical shutter or an LCD means can be arranged which can be set 
differently for the single pick ups. Advantageously, according to the invention, the 
30 LCD means can be set to be transparent over its surface area, panially transparent, 
or opaque. 
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So-called shutter means of CCD image conveners are known from the prior art. 
with the aid of which the cycle time for shifting the charges from the areas of the 
CCD array provided for lighting into optically covered areas can be selected such 
that the integration time of the image converter and thereby the brightness of the 
5 image picked up can be changed. Accordingly, it is advantageous according to the 
invention to differently set the amount of beam energy effective for image 
conversion by means of a suitable controlling of this means for single images. 

A particularly advantageous configuration of the invention provides that the single 
10 image data obtained is digitised, 'and the digitised data are made available to a 
device for electronic data processing. 

Some commercially available CCD arrays are, for example operated at an image 
refresh rate of 50Hz, that is to say fifty pick ups or recordings per second are made. 

15 It is known from the prior an to store and to process the images obtained by means 
of electronic data processing. For example, so-called "frame grabbers" are 
obtainable inexpensively as plug-in cards for work-place computers, which directly 
digitise a video signal, conven it into a suitable data format, and make it available 
to the computer as data in its main memory. That processing can be done in real 

20 time. 

When in an advantageous manner according to the invention, taking the pick up unit 
described hereinabove, a lighting source illuminates the object to be determined in 
a repeated sequence for l/50th of a second at low brightness, and subsequently for 

25 a further l/50th of a second with high brightness, synchronously with the image 
refresh rate of the CCD array, as a result images are obtained alternately with a low 
and a strong illumination. The low-lit images will image the parts of the surface 
with a high degree of reflection satisfactorily, while the parts of the surface with a 
low degree of reflection are imaged only very dimly and without a substantial data 

30 content. By contrast, with the strongly lit images, the weakly reflecting surface 
ponions are imaged sufficiently brightly, and with a high data content, while the 
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strongly reflecting surface pans are generally extremely bright and therefore appear 
saturated. 

It is particularly advantageous according to the invention to control the optical 
5 means described for influencing the amount of beam energy effective for image 
conversion synchronously with the image refresh rate. 

It is additionally particularly advantageous according to the invention when the data 
belonging to at least two single images are partially or completely combined in the 
10 means for electronic data processing by means of suitable algorithms. 

For example, it is advantageously possible according to the invention to combine the 
digitised data of two consecutive images by means of appropriate software such that 
the image areas with a high degree of reflection are selected from the low-lit single 
15 image described hereinabove, and the image areas with a low degree of reflection 
are selected from the strongly lit single image described hereinabove, and are 
transformed in a common brightness scale. As a result, an image is obtained which 
represents all image areas with sufficient contrast. 

20 It is advantageous according to the invention to provide finer stepping of the 
strength of illumination. In this case, further brightness steps can be used. The 
combined image is then composed from the image data of a plurality of single 
images. 

25 According to the invention it is not necessary to evaluate exclusively images which 
follow one another directly, or to combine only single images which have been 
taken using different beam energy. 

It is particularly advantageous according to the invention to have automatic control 
30 of the optical means described for influencing the amount of beam energy effective 
for image conversion, dependent upon evaluation of the actual reflection ratios in 
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the images previously picked up of the respective surface. By means of this control 
loop, it is ensured according to the invention that the respective illumination strength 
is optimised for all areas of the object to be determined. 

The use of a plurality of beam sources is also advantageous according to the 
invention. For example, by means of a beam source and suitable optical means, a 
pattern can be projected onto the object to be surveyed. When the angle of 
projection is different from the angle of pick up, in a known manner 3D data can 
be calculated from the imaging of the pattern on the image convener. The other 
beam source then alternately completely illuminates the surface to be surveyed. In 
this way both 3D information and views of the surface being determined can be 
obtained from the single images. The advantage according to the invention is in that 
a corresponding device, without mechanical movement of the optical means, can be 
designed with a simple configuration in regard to the beam path and using 
commercially available components. 

In this manner, according to the invention optical beam paths can advantageously 
be switched to be active and inactive, both for illumination and/or transillumination 
of the object to be determined and for the imaging of the object on the image 
converter or conveners by control of the optical means designated as being suitable 
in this invention (for example, adjustable beam sources or aperture means, 
optionally with suitable optical systems). 

A further advantageous configuration of the invention uses at least two beam sources 
and at least two image conveners, wherein by means of suitable optical means, for 
example by means of a beam splitter, the respective image data are projected onto 
both image conveners. When one of the two image conveners is not set for visible 
light, but instead, for example, for infra-red or ultra-violet light, and one of the two 
beam sources also delivers such light, by alternating control of one or the other 
beam source, and by appropriate selection of the image signal of the corresponding 
image convener, image data from the visible light range and image data from an 
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invisible range can be acquired alternately. 

In this connection it is advantageously possible according to the invention to display 
the data of the image converter for visible light on a monitor, and to process the 
data of the image converter for invisible light by data processing such that they can 
also be represented on the monitor in a meaningful form. When infra-red light is 
used, the different strengths of signals obtained can be distinguished, for example, 
by different colours, as is usual when infra-red images are evaluated for testing the 
heat radiation of buildings. The user can then choose between the colour and 
contrast image and the evaluation of the invisible beams for representation on the 
monitor. 

A further advantageous configuration of the invention uses at least one beam source 
with an extremely short duration of illumination, preferably in the range from 0.001 
to 0.01 seconds, and high brightness. The amount of energy radiated for lighting 
the object to be determined can, in this instance, be varied by the duration of the 
beam. In addition, the influence of shaking effects when the pick up device is 
handled carelessly, is minimised. Such beam sources are, for example, known in 
the form of a stroboscopic light, flash lamp, flash tube or flash LED, and are, for 
example, used (also pulsed externally) for adjusting the ignition timing of four- 
stroke engines with mechanical contact breakers. 

During the pick up procedure, "shaded" areas can occur when the surface to be 
determined has undercuts with respect to the beam path of the projected pattern. 
In this sense, undercuts are configurations of formations of the three-dimensional 
contour which are covered up by parts of the object itself with respect to the 
direction of view or of projection, and to that extent are not accessible for viewing 
or projection. For such an instance, it is particularly advantageous according to the 
invention to provide at least one further beam source which using suitable optical 
means projects a pattern from a different spatial direction onto the surface, 
alternately to the other beam sources used. In this way data about the previously 
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new angle of projection. By means of appropriate software, the 3D data about the 
surface to be surveyed obtained from the different projection angles can be 
combined such that the 3D data are mutually supplemented. 

5 All the configurations of the method and of the device described in this invention 
can be combined with one another in many ways particularly advantageously 
according to the invention. 

When surveying places which are difficult to access, the constructional size of the 
10 pan of the device which is located in the area which is difficult to access is limited. 
An example of this is for pick up carried out in the oral cavity. For this reason it 
is not readily possible to make a record of, for example, a complete jaw. If the 
pick up device according to the invention is now moved relative to the surface being 
surveyed, different images are obtained as a result. The data processing following. 
15 the single pick ups then offers the possibility of combining adjacent single images, 
provided a sufficient degree of overlap of by the single images is ensured. 

It is known that a position and alignment of the pick up device which is changed 
relative to the surface being viewed results in a more or less strong divergence in 

20 the images of one and the same surface segment viewed. To this extent, it is known 
from the prior art to use digital approximation methods for combining and 
supplementing adjacent images and sequences of images. Suitable digital algorithms 
allow for partial compensation for the distortion errors of the planar imaging of the 
real, usually spatially configured surface. The continual combination of planar 

25 images of spatial objects is limited, however. The different methods for planar 
representation of the surface of the earth are a clear example of this. 

In this connection, the idea suggests itself that not only the two-dimensional images 
are combined into a whole image, but also 3D data which are ascertained. Suitable 
30 so-called matching algorithms which allow partial data about three-dimensional 
surfaces, using 3D coordinates of corresponding surface segments, to be combined 
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into overall data are known. 

The pre-condition of having corresponding surface segments is set down for the 
purpose of use for the invention described by way of example hereinabove. As the 
device according to the invention produces single pick ups every 0.02 seconds when 
using an image convener with an image refresh rate of 50 Hz, it can be assumed 
that even when the device is, for example, manually guided for pick up of the tooth 
set of a patient, each image will be picked up from a similar position to that of the 
previous pick up, and that a large degree of overlap is thus ensured between two 
consecutive pick ups, both for 2D data and for the 3D data obtained. A typical size 
for the part of the surface to be surveyed which is determined within one pick up, 
is approximately 10 mm x 10 mm, so even with a setting with a high speed of 
movement, a manually guided device, at approximately 30 mm per second, produces 
a degree of overlap of more than 90%. Even when it is assumed that the 
possibilities described hereinabove for alternating lighting and evaluation are made 
use of, and for example only each fourth image is actually taken into account for 
a three-dimensional calculation, a degree of overlap of more than 75% still results 
from this. 

With such an advantageous configuration of the invention, by moving the device 
along the row of teeth, with each image evaluated, new data about the three 
dimensional shape of the surface to be surveyed is added to those already available. 
In addition, by digital combination of the 3D data relating to the single images, with 
respect to the respective overlap the resulting data can be optimised. The data are 
made more accurate by the use of statistical methods, or compressed by increasing 
the number of interpolation points included. The quantity of the data to be obtained 
in such a way is not limited by the method or the device itself, but simply by the 
size of the memory available in the data processing unit. 

The use of the beam sources described hereinabove for short beam pulses is 
particularly advantageously used according to the invention in the connection 
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described hereinabove, in order to minimise shaking effects of a, for example, 
manually guided pick up device. 

The advantageous use, according to the invention, of at least one beam source 
5 which, by means of suitable optical means, projects a pattern at a sufficient 
triangulation angle with respect to the pick up direction onto the surface to be 
determined, and at least one further beam source, which, for example, alternately 
illuminates the object in true colour, and the following combination of the 3D data 
belonging to the single images with the colour data assigned to the single images, 
10 allows an extremely realistic colouration of a resulting 3D grid representation. 

In the present connection, it is particularly advantageous according to the invention 
to operate the beam sources which, for example, by means of a condenser, mask 

15 and optical system, project a line pattern on the surface to be determined, with a 
high beam intensity so that the projected pattern is sufficiently light in all areas of 
the surface for obtaining the 3D information. However, the areas of the surface 
with a strong reflection contain insufficient contrast and/or colour data for the 
purpose of a clear representation. The missing data can be supplemented as 

20 described hereinabove by combination of single image data which are obtained with 
reduced lighting, for example from the same beam source or by means of the beam 
source also described for surface lighting of the surface to be determined. 

In the present connection, it is particularly advantageous in accordance with the 
25 invention to set the beam energy for the projection of the pattern differently for the 
single images in order, when the line pattern is picked up - as described hereinabove 
for surface image pick up - to optimise overall the image data of the line pattern 
with respect to the partial reflection properties of the surface of the object by 
combination of the single pick ups. 

30 

In this connection it is particularly advantageous according to the invention to use 



12 

a colour image converter and white light for projection of the line pattern. If the 
beam energy is now varied as described hereinabove, for example using a flash 
lamp, the sequence of single images enjoys optimum colour and contrast data along 
the projected lines as well as optimum contrast signals for the individual lines for 
calculating the 3D interpolation points. If the pick up device is now moved slowly 
with respect to the object, by suitable combination of the data assigned to the single 
images, the 3D data can be compressed and a colour image of the object can be 
generated without gaps. In this sense, uniform surface illumination of the object as 
also previously described can be dispensed with. 

The device for carrying out optical pick up of the type described in the introduction 
attains the object according to the invention by means of the features wherein 

a) at least one areal electronic image converter employing an optical system 
suitable for pick up of images is used, which is suitable for picking up 
at least two consecutive images, and 

b) at least one adjustable optical means is provided, which can be set 
differently for pick up of the single images with respect to the amount 
of beam energy effective for image conversion. 

A configuration of the device which is particularly advantageous according to the 
invention provides means which effect digitising of the output signals of the at least 
one image converter and make these data available to a data processing system. 

A configuration of the device which is particularly advantageous according to the 
invention provides means which can store the data from at least two single images. 

A configuration of the device which is particularly advantageous according to the 
invention provides means which process the data from at least two single images and 
is able to combine these by means of suitable algorithms. 
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A configuration of the device which is particularly advantageous according to the 
invention provides optical means in the beam path between the at least one beam 
source and the object to be determined, which allow the projection of a pattern. 

Further advantages, features and possible applications of the present invention will 
be evident from the following description of preferred embodiments with reference 
to the attached drawing. 

The attached drawing (Fig. 1) shows a view of a device for carrying out optical pick 
up according tp the invention, partially schematically. 

The pick up device according to Fig. 1 is, in order to simplify the description, a 
reproduced only schematically without known, obvious parts of the device. To 
simplify the description, a detailed description of embodiments of parts of the device 
which belong to the prior an, such as specific embodiments of connections or fixing 
of parts has been dispensed with. 

All means (8 and 10 to 15) are rigidly fixed to a base frame (9). The fixing of the 
carrier (8) with respect to the base frame (9), is releasable and in the embodiment 
shown here, is such that when put together again, the intended geometrical 
arrangement of these parts with respect to one another is produced without 
adjustment. In addition the carrier (8) and the optical means (2 to 4) rigidly 
connected to it in the embodiment shown here, are of such a configuration that they 
are suitable for disinfection and sterilisation separately from the remaining means 
(9 to 20). 

The object (1) is a surface with three-dimensional extents. For example, it can be 
a tooth or a row of teeth of a human set of teeth. At a short distance away there 
extends the carrier (8) together with its components, and it can easily be imagined 
that the pan of the carrier (8) together with its components, facing towards the 
object (1), can be accommodated in the oral cavity. It is also easily imaginable that 
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the pan of the pick up device composed of the means (2 and 15) is held manually 
and the user of the device carries out an intraoral pick up procedure of a pan of the 
set of teeth of a patient, shown as the object (1) in Fig. 1. 

In the embodiment shown here, the carrier (8) is a prismatic body of optical glass 
of BK 7 quality with a cross-section of 15 mm x 15 mm. The long sides are 
parallel ground, polished, and are suitable in this embodiment as planar optical 
deflecting means making use of total reflection, shown in Fig. 1 as mirrors (3 and 
4). The pan of the glass prism, shown in Fig. 1 as a carrier (8), facing the object 
(1) is inclined at 45°. This surface is also ground, polished and in addition is 
mirrored and serves as a plane mirror (2) for deflecting the beams in the direction 
of the object (1). 

For reasons of space, it can be advantageous to also arrange deflecting means on the 
side of the carrier (8), facing away from the object (1), so that the means (10 to 15) 
do not have to be arranged in one plane. 

Within the meaning of the invention, mirrors are optical deflection means regardless 
of whether the relevant surfaces are mirrored or the capacity for deflecting optical 
beams takes place by making use of total reflection. 

The carrier (8) which is in the form of as a glass prism (8) can, according to the 
invention, advantageously be heated so that it does not fog when invasive pick ups 
are carried out. Alternatively, an air stream can be conducted such that the pan of 
the glass body used intra-orally and which is relevant for the pick up is kept dry. 

In another advantageous embodiment of the device, the carrier (8) is of such a form 
that it is suitable for endoscopic examinations. In addition it is advantageous 
according to the invention possibly to arrange further optical means on the carrier 
(8), for example lenses, in addition to, or instead of, the mirror (2). 



15 

The beam sources (13 and 14) respectively provided with the optical means (10 and 
11) serve to light the object (1). The beams are deflected by means of the planar 
mirrors (2 to 4). In the embodiment shown here, the optical means (10) are 
composed of a condenser, a mask and an objective. By means of the means (13, 
5 10. 4, 2) a line pattern is projected over its area onto the object (1). A condenser 
is used as the optical means (11). By means of the means (14, 11 and 2, the object 
can be illuminated over its area. Flash lamps are used as beam sources (13 and 14). 
The beam sources (13 and 14) are connected to a control unit (19) by means of 
electrical connections (20). 

10 

The beams reflected from the object (1) are deflected by the mirrors (2 and 3) and 
imaged by means of the optical means (12) onto the image converter (15). In the 
embodiment shown here, the optical means (12) are composed of an objective. The 
electronic image convener (15) is in the form of a CCD array, and is connected via 

15 electrical connections (20) to a control means (18) and a means for digitising the 
output signal of the image converter (16). The digitised image data are made 
available to a data processing unit (17) via the electrical connection (20). In the 
embodiment shown here, a so-called frame-grabber with its own signal processor 
for rapid processing of the image data is used for the unit (16), and a commercially 

20 available PC is used for the unit (17). 

The electrical connections (20) between the means (18) and (19) and between the 
means (17) and (19) serve to synchronise the control of the beam sources (13 and 
14) with the image refresh rate of the image converter (15) and for returning the 
image data in a control loop for optimising the controlling of the beam sources. 

25 

The means (13, 10 and 4) on the one hand and (15, 12 and 3) on the other hand are 
aligned with respect to their optical axes (7 and 5) such that between the direction 
of projection of the pattern and the direction of image pick up, a triangulation angle 
of 20 degrees is produced. The optical axis (6) for the surface illumination is, in 
30 this embodiment, in the bisecting line of the angle of the other two optical axes (5 
and 7). In order to obtain data relevant to the 3D calculation, the projected line 
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pattern is played transversely to the plane fixed by the triangulation angle. 

In the embodiment shown here, the object (1) is illuminated synchronously to the 
image refresh rate of the image converter (15) alternately on the one hand with a 
line pattern, and on the other hand over its surface/uniformly. In the embodiment 
shown here, the image refresh rate is at 50 Hz. 

For optical, three-dimensional determination of. for example, the tooth set of a 
human, the front pan of the carrier (8) together with its components is guided into 
the mouth of the patient, a pick up procedure is started by means of an actuating 
element available within the scope of the data processing unit (17), not shown in 
Fig. 1 ? and in the course of the pick up procedure the pan of the device composed 
of the means (2 to 15) is guided manually such that gradually all the relevant surface 
areas of the object (1) are both imaged on the image converter (15) and to an equal 
extent involved in by the projection of the line pattern. The pick up procedure is 
terminated by means of a further actuation of the actuating element described 
hereinabove. 

In the sequence of the single image data picked up, there are now alternately images 
of the line pattern deformed because of the surface shape of the object (1) and 
images of the areally illuminated object (1). From the deformation of the line 
pattern, when the optical beam path is known, and taking into account the 
geometrical configuration of the projected line pattern for the corresponding single 
image pick ups, 3D coordinates can be calculated for a large number of interpolation 
points. From the sequence of the image data and 3D coordinates assigned to the 
single images, both the planar image data and the 3D coordinates can then be 
combined in the manner described hereinabove, so as a result, despite the viewing 
field of the pick up unit being of an order of size of 15 mm x 15 mm, there are 
both the 3D coordinates and a homogenous colour image of the whole tooth set. In 
this respect gaps caused by undercuts, confusing optical reflections or dark image 
areas without any substantial contrast are no longer present. By means of an on-line 
calculation and display of the respective intermediate results, the user can also 
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optimise the manual guidance of the pick up device. 

The knowledge of the optical beam path and of the geometrical configuration of the 
projected line pattern, necessary for 3D calculation, is obtained advantageously 
according to the invention in that a planar object (1), the detailed configuration of 
which is not shown in Fig. 1, and which also has a line pattern, in transverse 
relationship to the projected line pattern, is placed in succession at different 
distances parallel to the surface of the carrier (8) facing the object (1). If two image 
pick ups are now made, and if the reference object (1) is planar and the geometrical 
configuration of the line pattern and the distance between the carrier and reference 
object (1) are known for both pick ups, both the beam path and the geometrical 
configuration of the projected pattern can be calculated exactly for a large number 
of interpolation points. The values calculated already take into account any 
deformations caused by manufacturing tolerances of the means used. The 
intermediate values can then be further interpolated in the 3D calculation. 

The embodiment shown here is distinguished in that, 

a) no moving parts are used in the pick up unit; 

b) the optical design is of a simple configuration; 

c) by using an elongate glass body, a simple possibility has been selected 
for causing the beams to intentionally reflect, once or more times, off the 
walls of the glass body to produce a pattern on the surface to be 
surveyed, so that a larger angular difference is produced relative to the 
pick up beams than if all the beams were guided in a straight line by 
means of the carrier, wherein the relative angle of the beams to one 
another is simply produced as the arcus tangens of the ratio of the 
distance between the object and the pick up and lighting units on the one 
hand, and the distance of the optical systems from one another on the 
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other hand. An angular difference in the range between 15° and 45° 
between the pattern-generating beams and the beams for pick up is 
advantageous for carrying out the survey. Larger angles increase the 
risk of "shadow forming" in the case of stepped surfaces, smaller angles 
reduce the accuracy of the survey, as the evaluation method is based on 
triangulation calculations; 

except for the carrier (8), base frame (9), mask for projecting the pattern 
and control units (18 and 19) commercially available hardware 
components can be used; 

the errors caused by manufacturing tolerances of the means used can be 
compensated for by means of the "calibration" of the pick up unit 
described hereinabove and in that respect only low demands overall have 
to be placed on the manufacturing tolerances of the means used. 
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List of designations 



1 object 

5 2,3,4 mirror 

5,6,7 optical axes 

8 carrier (here in the form of a body of optical glass) 

9 base frame 

10,11,12 optical means (lens system, aperture means, and so forth) 

10 13,14 beam source (here in the form of a flash lamp) 

15 electronic image converter (CCD array) 

16 means for digitising analog signals (frame grabber) 

17 data processing unit (PC) 

18 control unit for the image convener 
15 19 control unit for the beam sources 

20 electrical connections 
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Method for carrying out optical pick up for the purpose of 
representation, documentation or surveying of objects (1) using at least 
one electronic image convener (15) with an areal viewing field, at least 
one optical means (12) for imaging the object on the image convener 
(15) and at least one beam source (13, 14) for illuminating or 
transilluminating the object (1), characterised in that 

a) at least two single images follow one another consecutively, and 

b) the effective amount of beam energy applied for the optoelectronic 
conversion of the images is set differently for picking up the single 
images. 

Method according to claim 1 , characterised in that the intensity of the 
beam energy applied for the optoelectronic conversion of the images is 
set differently for picking up the single images. 

Method according to claim 1 or 2, characterised in that the duration of 
action of the beam energy applied for the optoelectronic conversion of 
the images is set differently for picking up the single images. 

Method according to one of claims 1 to 3, characterised in that at least 
one beam source (13, 14) is set differently with respect to the amount of 
beam energy it emits for picking up a single image during picking up of 
the single images. 

Method according to one of claims 1 to 4, characterised in that optical 
means (10, 1 1) for influencing the effective amount of beam energy for 
picking up of a single image in at least one beam path (6, 7) between the 
at least one beam source (13, 14) and the object (1) to be determined are 
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set differently during picking up of the single images. 

Method according to one of claims 1 to 5, characterised in that optical 
means (12) for influencing the effective amount of beam energy for 
picking up a single image in at least one beam path (5) between the 
object (1) to be determined and the at least one image converter (15) is 
set differently during picking up of the single images. 

Method according to one of claims 1 to 6, characterised in that the so- 
called shutter means of the at least one electronic image converter (15) 
are controlled, with the aid of suitable means (18), such that the duration 
of action of the beam energy applied for the optoelectronic conversion 
of the images is set differently during picking up of the single images. 

Method according to one of claims 1 to 7, characterised in that the 
output signals of the at least one image converter (15) are digitised in a 
suitable unit (16), and the digitised output signals are made available to 
a data processing system (17). 

Method according to claim 8, characterised in that image data from at 
least two single images are stored, represented and/or combined by 
means of suitable algorithms, in a data processing system (17). 

Method according to one of claims 1 to 9, characterised in that the 
amount of beam energy effective for optoelectronic conversion of the 
images is set differently, synchronously with the image refresh rate of 
the image convener (15). 

Method according to one of claims 1 to 10, characterised in that the 
amount of beam energy effective for optoelectronic conversion of the 
images is set differently in a control section. 
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Method according to one of claims 1 to 11, characterised in that the 
amount of beam energy effective for optoelectronic conversion of the 
images is set differently in a control loop. 

Method according to one of claims 1 to 12, characterised in that optical 
means (10) are provided in at least one beam path between the at least 
one beam source (13, 14) and the object (1) to be determined, which 
allow the projection of at least one pattern. 

Method according to one of claims 1 to 13, characterised in that means 
and/or algorithms for forming 3D data are used in the data processing 
unit (17). 

Use of the method according to one of claims 1 to 14, for medical 
diagnostics or therapy. 

Device for a method according to one of claims 1 to 14, characterised in 
that at least one image convener (15) is in the form of a CCD array. 

Device for a method according to one of claims 1 to 14, characterised in 
that at least one beam source (13, 14) is in the form of a flash body. 

Device for a method according to one of claims 1 to 14, characterised in 
that at least one base frame (9) or a carrier (8) rigidly connects at least 
two of the means (2 to 4 and 10 to 15). 

Device according to claim 18, characterised in that at least one lens 
system (12) for optical imaging of the object (1) on the image converter 
(15) is fixed to the carrier (8). 

Device according to claim 18, characterised in that at least one optical 
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deflector means (2, 3, 4) is fixed to the carrier (8). 

Device according to one of claims 18 to 20, characterised in that the 
carrier (8) together with its components is releasable with respect to the 
other means (9 to 20) and is moreover of such a configuration that it is 
suitable for separate sterilisation and disinfection. 

Use of the devices according to one of claims 16 to 21 for invasive 
medical purposes. 

Use of the devices according to one of claims 16 to 21 for non-contact 
surveying of at least one tooth of a set of teeth of the human or animal 
body, for dentistry purposes. 

Use of the devices according to one of claims 16 to 21 for non-contact 
surveying of the tooth set of a set of teeth of the human or animal body, 
for orthodontic purposes. 



